kettle 开发

kettle 开发

0
推荐
5282
浏览

2)使用kettle调用api获取返回值并写入目标表

需求有一张时间到维度表,需要判断是否节假日,并且在biee作业条件最为筛选。api介绍http://api.goseek.cn/Tools/holiday?date=20180703,这里跟的是日期,在页面中输入该地址如下图。工作日对应结果为 0, 休息日...

dogn 发表了文章 • 2018-07-03 15:20

0
投票
0
回答
1797
浏览
0
推荐
6211
浏览

kettle转换组件杂记-【javascript组件】获取当前时间的前一天/后一天

一、获取当天日期有两种方法:01."获取系统信息"组件-》类型选择系统日期(可变)即可。注:组件的英文名为:SystemInfo02."javascript代码"组件中的new Date()注:组件的英文名为:ScriptValueMod上述两种方法获...

大白菜 发表了文章 • 2018-05-24 10:07

0
推荐
2819
浏览

【原创】kettle5.X 6.X 读入 mongodb数据【3.0+版本有用户密码认证情况下】

正文开始测试平台:win10+64位平台kettle(5.2.0版本)mongo(MongoDB server version: 3.4.1)问题描述:经过测试发现,如果 MongoDB 需要验证的话,kettle6.0以及以下版本是无法使用 “MongoDB input” 组件连接 ...

大白菜 发表了文章 • 2018-05-17 14:21

1
推荐
6113
浏览

pentaho kettle(1)以源为excel抽取到oracle,含字段类型转换

准备工作1.excel源文件2.mysql表结构3.mysql环境jar文件jar文件路径:Pentaho/design-tools/data-integration/lib开发1.测试mysql联通性2.新建转换从【输入】中拖出【excel输入】,双击该组建,如下图步骤操作:3...

dogn 发表了文章 • 2018-01-05 17:40

3
推荐
6538
浏览

Kettle手册(十二)- 控件使用-从步骤插入数据

这里介绍一个控件的小功能,也是最近才发现的,之前在“表输入”中要使用参数的话,一般都是使用变量,其实,还有个功能也可以尝试使用整体流程就是这样,我们第一个 query_paramter,就是查询了我们想设置的参数然...

liutangwow 发表了文章 • 2017-04-14 17:35

3
推荐
4174
浏览

Kettle手册(十一)- 用PGP加密、加密文件

看到有同学提问,以前也没用过,百度了一下,找了些资料,这里记录下。1. 安装gpg4win这个gpg4win是干嘛的呢,我们可以去他的官网看看:gpg4win目前,只知道他是加密的,这个是对Windows平台使用的这里可能还有个...

liutangwow 发表了文章 • 2017-04-11 10:18

3
推荐
6343
浏览

Kettle手册(十)- 跨库查询

Kettle整体使用起来,还是很方便的,熟悉应用了之后,就是对控件的熟悉和使用了,只要思路有了,就是整合下Kettle中各个控件的使用就行。这里,简单介绍下一个“跨库查询”的控件。有的时候,我们一个脚本,可能只...

liutangwow 发表了文章 • 2017-04-10 11:51

5
推荐
7603
浏览

Kettle手册(九)- 发送邮件

在Kettle里面,我们每天执行完调度之后,想要监控下JOB的执行状态,通常我们可以会发送邮件,可以的话,还可以发送短信。在Kettle里面,发送邮件很方便,这里,我们就简单的测试下。1. 在作业中发送简单邮件 ...

liutangwow 发表了文章 • 2017-04-10 11:03

2
推荐
9054
浏览

Kettle手册(八)- 循环

有的时候,我们想要在Kettle中实现这个循环的功能,比如,批量加载数据的时候,我们要对10张表执行同样的操作,只有表名和一些信息不一样,这时,写个循环就省事儿多了1. 遍历结果集实现这里的话,我们主要是通过...

liutangwow 发表了文章 • 2017-03-29 22:43

1
推荐
8086
浏览

Kettle手册(七)- 资源库的使用

1.为什么使用资源库    之前,我们新建转换或者作业的时候,都是直接保存在本地,而如果我们是多人开发的话,除了使用SVN等版本控制软件,还可以使用Kettle的资源库,他会将转换、作业直接保存在...

liutangwow 发表了文章 • 2017-03-29 18:49

0
推荐
7060
浏览

Kettle手册(六)- Hop小记

1. 什么是Hop    在我们前面,使用Kettle过程中,控件与控件之间的连线,这里,我们详细介绍下它,它在Kettle中叫Hop(跳)。2. Hop的发送方式(转换)在转换中,一般情况,控件和控件之间只有一...

liutangwow 发表了文章 • 2017-03-29 16:05

2
推荐
15640
浏览

Kettle手册(五)- 实例-增量同步数据

综合前面的几个例子,我们这里来是实现下增量数据的同步。这里只是分享一种方法,实际工作中,还会有其他更好的方案。增量同步的整体思路一般就是:首先拿到这张表的增量数据,怎么拿增量呢,源表需要有一个时间...

liutangwow 发表了文章 • 2017-03-29 11:48

3
推荐
12344
浏览

Kettle手册(四)- 变量的使用

我们在这一回,介绍下,Kettle中全局变量的使用,我们前面说过的配置文件,其实就是配置全局变量的地方Kettle手册(三)- 配置文件的使用及密码加密 1. 全局变量就是我们上面说的kettle.properties文件,我们在里...

liutangwow 发表了文章 • 2017-03-28 23:07

条新动态, 点击查看
天桥下的郑成功

天桥下的郑成功 回答了问题 • 2016-07-14 22:35 • 2 个回复 不感兴趣

kettle怎么处理数组

赞同来自:

给你找了篇帖子参考一下:
http://blog.csdn.net/yali1990515/article/details/50495141

重点在于 for(int i=0; i<size; i++) 使用控件的概念实现
给你找了篇帖子参考一下:
http://blog.csdn.net/yali1990515/article/details/50495141

重点在于 for(int i=0; i<size; i++) 使用控件的概念实现
0
投票
0
回答
1797
浏览
0
投票
0
回答
2185
浏览

kettle 6.0 无法连接hbase

linjing 发起了问题 • 2016-09-05 14:08
0
投票
2
已解决
3172
浏览

kettle怎么处理数组

子建 回复了问题 • 2016-07-18 14:35
0
推荐
5282
浏览

2)使用kettle调用api获取返回值并写入目标表

需求有一张时间到维度表,需要判断是否节假日,并且在biee作业条件最为筛选。api介绍http://api.goseek.cn/Tools/holiday?date=20180703,这里跟的是日期,在页面中输入该地址如下图。工作日对应结果为 0, 休息日...

dogn 发表了文章 • 2018-07-03 15:20

0
推荐
6211
浏览

kettle转换组件杂记-【javascript组件】获取当前时间的前一天/后一天

一、获取当天日期有两种方法:01."获取系统信息"组件-》类型选择系统日期(可变)即可。注:组件的英文名为:SystemInfo02."javascript代码"组件中的new Date()注:组件的英文名为:ScriptValueMod上述两种方法获...

大白菜 发表了文章 • 2018-05-24 10:07

0
推荐
2819
浏览

【原创】kettle5.X 6.X 读入 mongodb数据【3.0+版本有用户密码认证情况下】

正文开始测试平台:win10+64位平台kettle(5.2.0版本)mongo(MongoDB server version: 3.4.1)问题描述:经过测试发现,如果 MongoDB 需要验证的话,kettle6.0以及以下版本是无法使用 “MongoDB input” 组件连接 ...

大白菜 发表了文章 • 2018-05-17 14:21

1
推荐
6113
浏览

pentaho kettle(1)以源为excel抽取到oracle,含字段类型转换

准备工作1.excel源文件2.mysql表结构3.mysql环境jar文件jar文件路径:Pentaho/design-tools/data-integration/lib开发1.测试mysql联通性2.新建转换从【输入】中拖出【excel输入】,双击该组建,如下图步骤操作:3...

dogn 发表了文章 • 2018-01-05 17:40

3
推荐
6538
浏览

Kettle手册(十二)- 控件使用-从步骤插入数据

这里介绍一个控件的小功能,也是最近才发现的,之前在“表输入”中要使用参数的话,一般都是使用变量,其实,还有个功能也可以尝试使用整体流程就是这样,我们第一个 query_paramter,就是查询了我们想设置的参数然...

liutangwow 发表了文章 • 2017-04-14 17:35

3
推荐
4174
浏览

Kettle手册(十一)- 用PGP加密、加密文件

看到有同学提问,以前也没用过,百度了一下,找了些资料,这里记录下。1. 安装gpg4win这个gpg4win是干嘛的呢,我们可以去他的官网看看:gpg4win目前,只知道他是加密的,这个是对Windows平台使用的这里可能还有个...

liutangwow 发表了文章 • 2017-04-11 10:18

3
推荐
6343
浏览

Kettle手册(十)- 跨库查询

Kettle整体使用起来,还是很方便的,熟悉应用了之后,就是对控件的熟悉和使用了,只要思路有了,就是整合下Kettle中各个控件的使用就行。这里,简单介绍下一个“跨库查询”的控件。有的时候,我们一个脚本,可能只...

liutangwow 发表了文章 • 2017-04-10 11:51

5
推荐
7603
浏览

Kettle手册(九)- 发送邮件

在Kettle里面,我们每天执行完调度之后,想要监控下JOB的执行状态,通常我们可以会发送邮件,可以的话,还可以发送短信。在Kettle里面,发送邮件很方便,这里,我们就简单的测试下。1. 在作业中发送简单邮件 ...

liutangwow 发表了文章 • 2017-04-10 11:03

2
推荐
9054
浏览

Kettle手册(八)- 循环

有的时候,我们想要在Kettle中实现这个循环的功能,比如,批量加载数据的时候,我们要对10张表执行同样的操作,只有表名和一些信息不一样,这时,写个循环就省事儿多了1. 遍历结果集实现这里的话,我们主要是通过...

liutangwow 发表了文章 • 2017-03-29 22:43

1
推荐
8086
浏览

Kettle手册(七)- 资源库的使用

1.为什么使用资源库    之前,我们新建转换或者作业的时候,都是直接保存在本地,而如果我们是多人开发的话,除了使用SVN等版本控制软件,还可以使用Kettle的资源库,他会将转换、作业直接保存在...

liutangwow 发表了文章 • 2017-03-29 18:49

0
推荐
7060
浏览

Kettle手册(六)- Hop小记

1. 什么是Hop    在我们前面,使用Kettle过程中,控件与控件之间的连线,这里,我们详细介绍下它,它在Kettle中叫Hop(跳)。2. Hop的发送方式(转换)在转换中,一般情况,控件和控件之间只有一...

liutangwow 发表了文章 • 2017-03-29 16:05

2
推荐
15640
浏览

Kettle手册(五)- 实例-增量同步数据

综合前面的几个例子,我们这里来是实现下增量数据的同步。这里只是分享一种方法,实际工作中,还会有其他更好的方案。增量同步的整体思路一般就是:首先拿到这张表的增量数据,怎么拿增量呢,源表需要有一个时间...

liutangwow 发表了文章 • 2017-03-29 11:48

3
推荐
12344
浏览

Kettle手册(四)- 变量的使用

我们在这一回,介绍下,Kettle中全局变量的使用,我们前面说过的配置文件,其实就是配置全局变量的地方Kettle手册(三)- 配置文件的使用及密码加密 1. 全局变量就是我们上面说的kettle.properties文件,我们在里...

liutangwow 发表了文章 • 2017-03-28 23:07

2
推荐
12239
浏览

Kettle手册(三)- 配置文件的使用及密码加密

好了,我们上一回,练习了一个从数据库导出数据到Excel的例子,我们想一下,如果有很多个转换,我们没链接一次数据库,是不是都需要重复的输入那些数据库地址啊,数据库啊,用户名啊之类的。其实是不用的,我们可...

liutangwow 发表了文章 • 2017-03-28 22:31

8
推荐
15247
浏览

Kettle手册(二)- 将数据导出为Excel

    好了,我们先来看第一个例子,就是怎样将数据库中的数据,导出为Excel。平时,如果我们需要将数据导出Excel的话,我们可能会直接复制,然后粘贴出来,但是数据量大的话,就不好用了;或者使用...

liutangwow 发表了文章 • 2017-03-27 22:24